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Wer wir sind 


Zentrum für Cyber Cognitive Intelligence (CCI) 


Zentrale Anlaufstelle am Fraunhofer IPA für Maschinelles Lernen & 
Künstliche Intelligenz 


P Anwendungs- und Expertenzentrum für die Nutzung von MUKI in der 
(mittelständischen) Industrie - für produzierende Unternehmen, Ausrüster 


= Forschung, Entwicklung, Realisierung: Grundlagen und Anwendungen 
von ML/KI für die Produktionstechnik, Logistik und Automatisierung 


= Technologie-Transfer: Labore, Veranstaltungen, Weiterbildung 


Om. 


Open Lab Days Quick Checks Technologie- Pilot- 
Entwicklung anwendungen 


www.cyber-cognitive-intelligence.de 
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KI: Chance oder Risiko 


Künstliche Intelligenz ist eher eine ... 


... Chance 62% 


.. Gefahr 


82 % kennen den Begriff »Künstliche Intelligenz« E 
53 % wissen aber nur ungefahr, was damit gemeint ist 


19 % glauben, dass KI die Gesellschaft schon jetzt spürbar verändert 
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Definition(en) von KI 


Menschlich handeln 


"The art of creating machines that 
perform functions that require 
intelligence when performed by 
people.” (Kurzweil, 1990) 


> Der Turing Test Ansatz 
> Menschen nachahmen. 
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Menschliche Intelligenz kopieren? 


»An airplane flies in a way that’s very 
different from the way a bird flies, but 
they both fly - it’s the same with 
intelligence« 


Prof. Peter Stone, KI Wissenschaftler 
University of Texas at Austin. 
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KI Meilensteine 


Watson (IBM) 


Deep Blue 
(IBM) 


Stanford 
Turing Test Cart 


Backpropagation 
(Paul Werbos) Grand Challenge] ` Sr, Alexa, 
(DARPA) (Apple, Amazon) 


Perzeptron 
(Frank Rosenblatt) 


1970 - 1990 1990 - 2010 2010-heute 


Autonomes Auto 
Dame Programm (Ernst Dickmann) Roomba AlphaGo & 
(Arthur Samuel) TD Gammon (iRobot) Pluribus 


(Google, CMU) 
I ar A ME co => g ) 
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Annäherung an die menschliche Intelligenz 


Vielseitigkeit 


Leistung 
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Künstliche Intelligenz, Maschinelles Lernen, Deep Learning 


Einordnung 


Maschinelles Lernen (M 


anhan 


Deep Learning (DL) 


Lernen m naler 
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Maschinelles Lernen (ML) 


Traditionelle Datenverarbeitung Maschinelles Lernen 


Eingabe ———> 
Daten < Computer 1——— Progasmm 


— 


A. Samuel, 1959: „Machine Learning is the field of study that gives computer the 
ability to learn without being explicitly programmed.” 


> Lernen an Beispielen > verallgemeinern 


Wann ist Maschinelles Lernen sinnvoll? 


m Ursachen-Wirkzusammenhänge analytisch nur schwer/nicht beschreibbar 
oder nicht bekannt 


= Optimierungen mittels physikalischer Modelle aufwändig 
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Von Daten Lernen 


Lerndaten 


iS) 


— 


Daten- Simulation 
bestand 


Modell / © 
— 
Programm | Entscheidung 


Neue Daten 
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Praxisfalle des Maschinellen Lernens fiir 
kognitive Produktionssysteme 


Merkmalsunterscheidung 


Klassifizierung | | a ict des A B.C 2 


Erkennung von | | AusreiBer-Erkennung: 


= Anomalien m Ist das i.0.; gehört das hierhin? 
3 
E R Vorhersagen: 
Sara m Wie viele? Welcher Zustand? 
Verstärkungs- | | Passende Strategie lernen 
lernen m War das o.k. so? 


Hes 
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Regression: Griff in die Kiste 


= Vereinzelung chaotisch gelagerter 
Werkstücke 


= Objekterkennung in 3D-Punktewolke 
der Kiste 


m CloudPicking: Algorithmen laufen auf 
einem Cloud-Server 
> höhere Rechenkapazität, 
vereinfachte Wartbarkeit 


Laufzeit |Phasenla- [taserri- | Stereovision 
messung |gemessung | angulation 


:; Bu 


MESA SR4000 | Sick LMS400 | Leuze LPS36 | Ensenso N10 


Typische Sensoren für Griff in die Kiste 
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ion: Objektlageerkennung und -klassifizierung 


YOLO v2 
= 


http://pureddie.com/yolo 


Regression: Objektlageerkennung und -klassifizierung 
YOLO: Anwendung auf Bin-Picking-Roboter 


= You only look once (YOLO): Echtzeit-Objekterkennung 


m Videoquelle: https:/www.youtube.com/watch 


xhTkgajg8wQ 


= Fine-tuning des neuronalen Netzes erforderlich! 
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Regression: Objektlageerkennung und -klassifizierung 
Datenerzeugung: Virtuelle Lernumgebung (V-REP) 


Zentral- 
projektion 
RGB Bild 
Tiefenbild 
Gelabelte 
Daten 


Orthogonale 
Projektion 


RGB Bild Tiefenbild Gelabelte Daten 


Verstarkungslernen: »DeepGrasping« 
Software bp3 — Erweiterung um „Transfer Learning” 


Virtuelle Lernumgebung Transfer auf realen Roboter 
(z.B. Handhabungssimulation) (mit ähnlichen Werkstücken) 


Prozess- 
modell 


Prozess- 
modell 


Wissen 


m Lernumgebung dient der Datengenerierung zum Trainieren neuronaler Netze 
m Rauschmodelle von realen Systemen > Modellparameter im Physik-Simulator 
= Generiertes Wissen (Prozessmodell) wird auf den realen Robotertask transferiert 
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Anforderungen 
Entwicklung von ML Anwendungen 


m Projekte mit KI-Bezug haben spezielle Anforderungen an Computersysteme 


= Rechenleistung 
Speicherplatz 
Systemauslastung 


= Der gesamte Lebenszyklus von ML-Modellen erfordert eine leistungsstarke 
Infrastruktur: 


Datenbereitstellung, Datenhaltung, Datenwartung 
Modellentwicklung 

Modelldeployment 
Modell-Lifecycle-Management 
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ML-Modell Lifecycle-Management 


Deployment 


Ausgangssituation 
ML Okosystem 


Tools & 
Frameworks 


Simulation 


@ python 
© PyTorch FF TensorFiow ef. 


Programmier- l 


x m 
umgebungen d 

Versions- r ` 

kontrolle l Zeit A Gitta 
ML Plattform l Anva. È docker ] 
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Ausgangssituation 
Tasks 


a) wenig 
anspruchsvolle 
Anwendungen 
(CPU-only) Daten | 


BS 
S = 
b komple | >. 
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Ausgangssituation 
Player und Kollaboration 


Version Control 
DE 
Abteilung 1 Abteilung 2 
Q Projekt A Q Projekt 8 & Q Projekt ¢ Se 
= Setup A = Setup P Team ı = setupc 


Person A Team 2 


App B 
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Ausgangssituation 
Nvidia DGX Workstation mit Docker 


= Wieso Docker für ML? 


= Isolierung verschiedener Services auf einer 
Maschine 
= Entwicklung 
= Isolierte Entwicklungsumgebung > keine 
wechselseitigen Abhängigkeiten (z.B. 
verschiedene Versionen einer 
Programmiersprache, Bibliothek, Framework) 
= Reproduzierbarkeit und Nachvollziehbarkeit 
= Portierbarkeit: Anwendung wird auf jedem 
System gleich ausgeführt 
= Deployment 
= Trennung des Anwendungscodes (Modell) von 
der bereitstellenden Infrastruktur 
= Zuweisung/Limitierung von Ressourcen möglich 
= Schnelles Deployment 
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Ausgangssituation 
Nvidia DGX Workstation mit Docker (II) 


ML Plattform 


= Probleme 
System verwaltet durch wissenschaftlichen Mitarbeiter 
Hinzufügen neuer Nutzer dauert lange 


Keine allgemeine Schulung für den Umgang mit dem 
System 


Anvia. 


Wroocker 


Blockierter CPU-Speicher durch laufende, ungenutzte Docker- 


Container 


GPU-Einteilung (Anzahl GPUs pro Abteilung) wird nicht eingehalten 


Viel Abstimmung untereinander nötig 


> Es fehlt die professionelle Verwaltung des Systems 


Universität Stuttgart 
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Wunsch-Zustand 
Orchestrierung von Containern kubernetes 


m Einsatz von Containern für Entwicklung und Deployment ermöglicht die Trennung 
verschiedener Services unter einer Infrastruktur 


= Organisation und Zusammenspiel zwischen Containern muss verwaltet werden 
Netzwerkzugriff 
Teilen von Ressourcen 
Dateizugriff 
Etc. 
m Lösung: Kubernetes 
System zur Container Orchestrierung 


Verteiltes System (Skalierbar, ausfallsicher) 
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Wunsch-Zustand 


ML Okosystem erweitert 


Tools & EIS ML) @& python Simulation 
Frameworks Vers  OPyTorch A TensorFlow ef. 
Programmier- KE 

umgebungen < Na 

Versions- P e 

kontrolle KE Jans 

ML Plattform KUCH E ocker 
Infrastruktur 


Universität Stuttgart 
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Wunsch-Zustand 7 
Versionsverwaltung + CI/CD y G l tLab 


m Zentrale Versionsverwaltung: GitLab 
m Bietet CI/CD Pipeline 
® Continuous Integration: Anwendung wird automatisch gebaut & getested 


® Continuous Delivery: Anwendung wird zusätzlich deployed (manuell 
getriggered) 


Continuous Deployment: Deployment erfolgt automatisch 
m Erlaubt Einbindung zusätzlicher Rechenkapazitat als sog. Runner 
= GPU Cluster 
Distributed Computing 
= Integration von Planungstools 
= JIRA 


Slack, Mattermost, uvm. 
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Wunsch-Zustand 
Versionsverwaltung + CI/CD 


CI/CD Pipeline 
bel 


GitLab Model Training, Model Deployment 
Testing 


| 


Python scripts 


Universitit ane ZÆ Fraunhofer 
WPA 


Fazit 


m KI ist keine neue Erfindung, kann jedoch durch die Verfügbarkeit großer 
Datenmengen, günstiger Rechenleistung und Open Source Software 
gewinnbringend eingesetzt werden 


m Bisher existieren nur „schwache“ Kl-Anwendungen: hochspezialisiert auf die 
Lösung einer bestimmten Aufgabe 


= Der gesamte Lebenszyklus von ML-Modellen erfordert eine leistungsstarke 
Infrastruktur: 


Datenbereitstellung, Datenhaltung, Datenwartung 
Bereitstellung aktueller Daten in erforderlicher Qualität 
Modellentwicklung 
Modelldeployment 
Modell-Lifecycle-Management 
Wann ist ein Modell noch gut und wann muss es ausgetauscht werden? 
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Vielen Dank! 


Christoph Hennebold 
christoph.hennebold@ipa.fraunhofer.de 
+49 711 970 1963 


www.cyber-cognitive-intelligence.de 
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